Causal Representation Learning for Generalisable Recommendation
因果表征学习提升推荐系统分布外泛化:从信息解耦到线上A/B验证
🧭 因果表征学习 · 分布偏移优化 ★ 深度解读
University of Warwick · Spotify · University College London
提出互信息解耦准则去除表征中的非因果依赖,在Shopify线上A/B测试中显著提升用户参与度,而离线指标不起变化
📌 工作参考价值(4 点)
- 直接在标准排序损失上增加一个互信息惩罚项(通过梯度反转实现去相关),无需额外数据、不改推理架构,即可消除物品表征中的非因果泄露,适用于任何现有监督模型。
- 离线指标(如AUC)可能完全反映不出线上收益:论文三种场景下CRL模型在偏置训练集上离线指标与基线持平,但在随机曝光测试集和线上A/B中均显著胜出。建议多用随机曝光测试集或小流量线上实验评估分布外真实效果。
- 调参安全:理论表明存在“无损耗”区间,较小的惩罚权重λ即可去掉非因果信息,不损害预测效用;实践中可用NCE-CLUB上界监控互信息下降量。
- 工程落地简单:方法与具体模型解耦,无需干预数据或多环境分划,仅用现有观测日志训练,适合大规模推荐系统快速部署。